WearableQA: A Benchmark for Health Reasoning over Real-World Wearable Data
WearableQA：面向真实可穿戴数据的健康推理基准
🧭 LLM 评估 · 健康时序推理
Meta · KAIST · Korea University
构建4084题真实可穿戴健康推理基准，覆盖16种题型，评估14个LLM准确率仅19.6%–72.9%
📌 工作参考价值（4 点）
- 可迁移其「数据推理 vs 健康推理」的题型划分，用于评估推荐/电商场景中 LLM 对用户长期行为序列的推理：区分简单统计聚合（如近30天购买频次、复购率）与业务语义解释（如消费力迁移、流失风险），并设计单信号与跨信号交叉问题检验多域融合能力。
- dual-grounding 框架值得复用：结合领域先验规则与统计显著模式生成多选题，可避免纯模板生成的表面线索，用于构建商品属性问答、用户画像推理评测集。
- 保留真实数据分布（设备噪声、个体差异）的评测思路有借鉴意义：不要只用清洗后的聚合特征评测 LLM，应让模型接触原始事件序列和噪声，检验鲁棒性。
- 直接业务借鉴有限，但对保险/健康电商、用户运营 Agent 等涉及可穿戴信号场景，提供了一套可落地的真实数据评测模板。